내 쿨 400! 
06061 0065 
60016 
2014 


쿠 키 런 1 년 , 
서버 개발 분 투 기 


데 브 시스터즈 
호 선 지 | 


ㄴㄴ 


홍 성 진 (64119]!1110110@06\61616[8.0 ㅇ 017) 
ㆍ 서 버 팀 테크니컬 리드, 데 브 시스터즈 


ㆍ 니지 6021 " ㅁ 니 띠 , 쿠 키 런 10 < 하 <3 6, 오 븐 브 레이크 2 서버 


ㆍ 시니어 소프트웨어 엔지니어, 위 클 레이 


ㆍ 영 상 통 화 메 신 저 업 개발, 서버 개발 


ㆍ 통 계 기 계 번 역 팀 , 소프트웨어 엔지니어링 인턴, 구글 코리아 
ㆍ 한글 형 태 소 분석, 품 사 태깅, 웹 크롤러 구현, 훈 련 용 데이터 크롤링 


ㆍ [2\ 타 100 띠 ]91190 『 이 601 0016 나 아 


22724 


2" 추 -7 호 002 -7 저 『 ! 


07111)006 4 


영 이 9 히 유인. 9046 이 6 


다루 


는 


> (2 


내용 


[| 


. 구 기 던 서버 소개 
. 구 기 런 출시 준 비 과 성 


. 구 키 런 출시 이후 


1 ㄷ 0 
비토 0685 
턴 0 녀 탭 페 데 페 나베 
2014 


띠 든 × ㅁ 4 ㄷ ㅁ 424 


쿠 기 런 서 버 의 목표 


소프트웨어 스택 


ㆍ 0373 8, 50000 4.0, 116 3115 
ㆍ (604 아 6856 2.2: 사용자 데이터 

ㆍ * 8 노드 19520318 메모리, 1.9108 스토리지 
* 17501 5.5, 56016 2.8: 게임 운영 데이터 
ㆍ /310005 16041653, 4005 8, 4010× 


ㆍ 580816-041 가능한 513161655, 5113160- ㅁ 01100 구조 


(0311/)/13+601 - 소 스 코 드 형 상 관 리 


, \ 3\ ㅇ 6 8『821 ㅁ 00165 


야 10\100 11 0[811 아 165 001 71610 60 1010 178816[. \16\ 11610 60 ㅁ 「317 아 168. 


* (3117 51 따 060 나 
Ｌ ㄴ 869[40008160 7 085 200 『 ㅁ + 90080×. 
06\610[ ㅁ -1176-7616856 


@ 기능 개 발 은 10016 가 30) 에서 신행 ※%1 ㄴ 8351400083160 2 11045 200 0 |41100165. 


40006 _115107\ 
ㄴ 85100083160 4 0825 200 0 | 나 11005. 


무는 번 경 사 항 은 코 느 리 뷰 / 테 스트 06\610 ㅁ 


ㄴ 85[0400083160 5 082\5 200 0\ |411001<5. 


341010 ㅇ 2 


로 06\6100, [13516【, 1176 [ 다 3100}7 ㄴ 851400083160 6 025 200 0 | 나 11005. 


3410 ㅁ 100 
ㄴ 85[040008160 6 08215 200 0 | 니 11005. 


ㆍ [71351 [0[30 야 1 모 통 합 되 어 죄송 빌드 


(0601 - (600110 ㅁ 40468 10160『31100 


ㆍ 서버 000110 ㅁ 04045 10160131107 


* 17501, (004 아 10856 와 동 합 테스트 


ㆍ 80301 빌드 관리 타지 

ㆍ [013516『「 03007 빌드 관리 , 

ㆍ 빌드 깨면 메 일 이 날 아 옴 0 ' 

ㆍ 성공적인 83516 빌 드 는 서버 업데이트 빼 
를 위해 사 용 덤 


( 가 16} - 서버 


소 스 코 드 저렴 관리 
형 상 관리 
만큼 구축 


01~260 ㅠ 0 ㄴ ~? "/1 ㅁ 00 ㅁ 6/067818 ㄴ 68 00 
0\2 ㅁ 6 ㅜ ~ '"0 ㅇ 6 ㅠ ㅁ 1 ㅋ ㅁ 8 ㄴ ㅠ ㅇ ㄴ ㅎㅇ '" 
9006 '"0 ㅇ 6 ㅠ 81 ㅋ ㅁ 8 ㄴ ㅠ ㅇ ㄴㅇ" 
0006 0755 
20 ㄴ ㅠ 10 ㅁ :0 ㅇ ㄴ ㅠ ㅇ ㄴㅇ 
670 
04866 ㄴ = 04171271 ㅠ "200 ㄴ ㅠ ' 00 
『1167280016 1101 65535 
670 
04166 ㄴ ㅋ 1 ㅁ 0417101 "067816 ㄴ ㄷ 6 ㅁ ㅋ ㅁ ' 00 


『116720016 1101 65535 
67 ㅁ 0 ㅇ ㅁ 
ㅁ 0201<20 ㅇ ' ㅁ ㄴ ㅁ ㅇㅇ" 


ㅁ 0201<20 ㅇ '"0 ㅇ ㄴㄴ" 
ㅁ 20201<20 ㅇ '"8 ㅠ ㅁㅁ" 


20\05 (:104 아 0070 31100 - 


ㆍ 서버 초 기 설정, 로 드 밸 런 서 구성, 


20165608!6 구성 등 을 


두 450 씨 파일 


형 태 로 작성 및 관리 


ㆍ 언제 어 디 서 는 


구축 가능 


30 분 이내 서버 인 프 라 를 


인 


ㄴㄴ 


프라 


형 상 관 리 


< 


ㄴㄴ 


"0202.1620819 브 "1 { 


"0706": 


" 즈 다 으 1 01261 ㅁ 00020: 121 2201" , 


"22006= ㄴ 698 "1, 


"218@6200680 ㅇ ㄴ 160 ㄴ 1 ㅇ 7 ㅁ " : 
"146 ㄴ ~1 ㅇ 2312206 " : 
"162207068 ㅁ 020" : 
" 음 느 60128 노 126 "1 


"2200 느 11122102 ㅁ " , 
" 즈 \086/802 " , 


"27620 '' , 


"26816"; "60", 
"87210212020 ㅁ 86100 "1; "1", 
"22 668010 ㅇ "1; "60", 


" 즈 1.3227202061202 ㅁ 5 '"' 


, [ ("862 "; "600662762 ㅋ 60216005801167" } ], 


"20120670810798 "; [ 


{ 
"8206"; "206 ㅁ ㄷ 0 ㅇ ㅁ 58 ㅇ 211006 ㅋ ㅇ ㅁ 00226 " , 
"78106"; { " 표 6*【", 


} 


" 뒤 6666276=862 ㅇ 06" -} 


]; 


"(60060608 ㅋ 16802 ㅁ 0606 ㅋ 2 ㄴ 0 ㄴ '' : 


} 
>, 


"(632626@~ 마 12702 ㅇ 510010 " 


"06816-0 ㅁ 96 1* 0280 > 60% ｌ,0 ㅋ 8 1 ㅁ 1 ㅁ ㅁ ㄴ ㄷ ㅇ 8" , 


20\080 /20410506816 


부 하 에 따라 서버 대 수 를 자 동 으로 조 절 해주는 서비스 
ㆍ 평일 기준 새벽 시간대 4 대 에서 피크 시간대 30 대 까지 
ㆍ 크리스마스 연휴 때 서버 120 대 


ㆍ 장애가 일어난 불량 노 드 를 알아서 대체 


61 


프로덕션 업데이트 과 성 


ㄷㄷ 근 ~ 
ㆍ 148461 으 로 만든 빌 드 를 53 에 업로드 ~ 0 
[06\4\61000 나] ( 이 6| (>001<6「41 
ㆍ ( 가 16} 와 이 04 아 0「7091100 기 반 으로 만들 ' 면티 =” 
어진 44105081109 6『040 이 『1011100 아아 아 아 아 개 가 2 : 


0600816 신행 


ㆍ 59% 정도 진행 
니 터 링 한 후 1 


\-0 


깊 거 | 노 161071178160 | 010 \6「6101 46\ \/6「6100 68160 


자 애 / 성 늦 모니터링 
"  ) "  ) <” "  ) 6【3【5.00411[6「5.00117.064515【61「5.081106.046112.561106. ㄷ 0017017\561106.*,「12108 


ㆍ 21000 01040\0\031071, 49001×%, 513150 + (9『732011116 


= = ： 20:00 2100 22700 23-00 00-00 01:00 
@ 조기 서 버 구조 선 택 숭 에 / [ 상 탁월 인 선 태 러 상 애 성 능 문 제 56『2365.00 니 가 215.00177.06\5156621「5.921776.014617 고 .5611062. ㄷ 600170177156=1106.62117 ㄴ 0117.1 카트 


하 카 5.00 내 1 가 2「5.00177.06\515615.0921776.01\61 고 .561「106. ㄷ 001701771156=「106.6211700 ㄷ 177.「 카트 


1 타 「 [ 어 그 < 하 카 5.00 니 1 가 2「5.00177.06451561「5.0921776.01\617 고 .561「106. ㄷ 6 ㄷ 0017017711561106.5126170 ㄴ ㄷ 0117.『 카트 
게토 Ｌ ㄴ 도 = 


하 라 5.00417 ㅠ 6215.00177.0 ㄷ \5156「5.921776.01617 고 .561「106. ㄷ 6 ㄷ 001701771561106.512617005 =177.「 카트 


널 메소드 호 줄 빈도, 11752 _ 게임 내 경제 (코인 생 성 / 소 멸 ) 2[5.110161「5.0010.064515【[6『5.08116.046112.5610106. ㄷ 001101005610106.*.400601「 9 
결제 모니터링 등 


@111160(\ ㄴ 101110400 ㅇ 05 =  "' ) 
04[0116 1010 60 타 00110(11 0 ㅁ 6010@0560, 1171 01047, 50170 [『0001111167@ ㅇ 2) 


5 ㄴ 0【50(Ｌ161 ㅁ 0 . 110『「'001617\Ｌ(.'' 510 . 0} 100 _[0 107_600 마 160_00111' , 600076001172 ; 20:00 21:00 22000 23:00 00:00 01:00 


하 카 5.1177615.00177.06 ㄷ \51615.921776.0141617 고 .561106. ㄷ 6 ㄷ 001701771156「106.62117 ㄴ 0117.412106「_90 
하 라 5.1177615.00177.061\515【615.0921776.01\617 고 .561106. ㄷ 6 ㄷ ㄷ 017017711561「'106.6 ㅎ 21170 ㄷ 177.4121[66「『_90 
하 카 5.1177615.00177.06\515615.921776.01617 고 .561106. ㄷ 00170177156「'106.51061709 ㄴ 0117.4121[66「_90 
하 카 5.1177615.00177.06\515『615.0921776.01617 고 .561106. ㄷ 6 ㄷ 001701771156「'106.512617005 6177.4121061_90 


15 년 [ [Ｌ 


구 기 련 서머 인프라 


마 존 4005 를 메 인 으로 
겨 폭 확보 


ㆍ 2 개 의 클라우드 


를 위해 종 


ㆍ 게임 데이터 서 비 스 를 
: 장애 모니터링 및 장애 노드 복구 전 자 통화 
사 용 사 수 요 에 따른 사동 서버 확장 


쿠 키 런 서 버 는 


1 ㄷ 0 
비토 0685 
턴 0 녀 탭 페 데 페 나베 
2014 


띠 든 × ㅁ 4 ㄷ ㅁ 424 


ㆍ 서버 개 빌 ㅅ 


| 명, 시스템 엔지니어 () 병 


축 시 로 일 


레이크 2 


20 


른 브레이크 2 서버 구조 


아 느 웨어 기반 서 버 를 본따 만든 구성 


가 용 성 을 위해 로 드 밸 련 서 아래 두 대의 
사 기 서 버 가 분 산 되어 있음 

사용량 층 가 를 우려해 과도한 스 팩 을 사용 
|/3616『-518'76 구 소 의 데이터베이스 
06- ㄷ 851 에 서 서비스 


모두 수 으로 설치 및 미 | 관리 


~ 


터 6 


16021 1483616『 


81276 『[1601!1108 


01236 ㅁ 60108 


기존 서 버 의 한계 
ㆍ 새로운 서 버 를 만들어야 할 경우 문제 
있는 자 료 는 오래된 내용 


ㆍ 관 리 자 가 교 체 되면서 회 사 에 남 아 있는 서 버 지 식 이 점점 사라짐 


“ 
뽀 
01 
호 
0! 
[ 무 


디 피로도 층 가 


쿠 기 런 서버 개발 


| 


리 / 운 영 


/ 곤 
드 


즈 
도 


ㆍ 혼자 개 발 / 구 


를 재활 


레이크 2 서버 


현 한 서버 


( 가 16} 도입 


ㆍ 2401050816 을 도 입 하 려면 서버 이 미 지 를 빌 드 할 수 있어야 
ㆍ 서버 이 미 지 를 빌 드 하려면 서버 형 상 관 리 가 필 요 하 다 
ㆍ 서버 


' 가상 


상 관 리 : 『 ㅁ 40606, 나 16, ^1516016 


나 


0 무 
[10 


사 용 자 를 보유한 16} 선택 


ㆍ 초 기 에 배 우 는 게 쉽 지 는 않으나 익 수 해 지면 매우 강력한 툴 


출시 전 준 비 했 던 것들 


ㆍ 436061× 기반 서버 장애 모니터링 
ㆍ 518150, 69『7301116 기반 성 등 및 지표 모니터링 
ㆍ 씨 //9 605 기 반 의 !\//5(00Ｌ 43516『-5183'/6 구축 


ㆍ / 시 75 2041050316 


* 950 형 태 의 38106 Ｌ ㄴ 009 


1 ㄷ 0 
비토 0685 
턴 0 녀 탭 페 데 페 나베 
2014 


띠 든 × ㅁ 4 ㄷ ㅁ 424 


미 미 했던 시작, 얼마나 성 장 할 까 ? 


ㆍ 마 케 팅 비 0 원 


27 


24:00 


ㆍ 24& 니 도 바 진 가 지 로 층 가 


4 일 째 부터 수 기 석 서버 장애 


40416 5081100 최대 100 대 까지 


28 


1,400,000 


1,050,000 


700,000 


350,000 


0 
4/ ㅣ 


4/2 _4/3 4/4 4/5 4/6 4//7 


= [46\ 2050 = 1[20& ㅁ 0 


| 


출시 11 일 차 시즌 2 업데이트 이 벤 트 + 연 휴 


~, 


29 년 


1 ㄷ 0 
비토 0685 
턴 0 녀 탭 페 데 페 나베 
2014 


55000 쿠 키 런 서버 개발 회고 


띠 든 × ㅁ 4 ㄷ ㅁ 424 


요즘 뜨 고 있 는 기술 ×, 써 몰 까 ? 


외 사 의 사 운 을 걸고 × 를 사 용 하 어 서버 개 발 을 할 수 있나? 
기술 × 가 이 게 임 을 재 미 있 게 / 효 과 적 으로 개 발 하는데 큰 장 점 이 있나? 
눈 세 가 생겼을 경우 × 의 소 스 코 드 를 패 지 할 수 준 으로 감 당 이 되는가? 


은 소프트웨어 엔 지 니 어 의 기본 덕목 


서버 비용 5 생산성 (예시) 


ㆍ 100 만 [0440 ×0834\83 × 50100: 2,000 만 원 / 월 

ㆍ 100 만 040 ×『\ 타 1600 × 미 3000: 8,000 만 원 / 월 * 
ㆍ 100 만 [0044 게 임 의 월 매 출 은 ? 

ㆍ 차 이 가 전체 매 출 의 2% 도 안됨. 반면 생 산 성 의 향상 


* 벤 치 마 크 기준: "[6://\\/.16 아 1610 ㅁ 0\/6[.0010/! ㅁ 60011 31(5/ 


1/601Ｌ ㄴ (60617) 


ㆍ 145021Ｌ 에 익 숙 하다면 쓰 는 것 은 괜찮다. 성 공 하 면 나중에 !10「31101 해도 됨 
ㆍ 1| 억 『0\ 이하, 쓰 기 가 많지 않은 데 이 터 는 [26815 로 중문 
ㆍ 하지만 게 임 이 성 공 하면 대 부 분 의 사용자 테 이 블 은 이 기 준 을 만 족 하지 못한다 
ㆍ 6) 가 8 에 게 하 트 를 보내는 기능 => 데이터 = 사 용 자 수 4 %× \\ 
직접 508『0100 애서 쓰 느 니 그냥 050 쓰자 


ㆍ 하지만 147, 1408 결제 정 보 는 무조건 『[ ㅁ ㅁ 06/5 에서 저 장 하 라 


&0410 518[010 ㅁ 0, 4410 [160 히 810010 ㅁ 0, 「 21106 를 지 원 히고 


안정화 되 어 있는 4650! 


ㆍ 이 조 건 을 만 속하는 제 품 은 생 각 보나 별로 없나 


ㆍ 쿠 키 런 의 경우 6004 아 10856 를 시 용 하 기 로 결 정 * 


피스 져 | 
* 게 임 마 나 서 버 마나 적합한 *65(2Ｌ 데 이 터 베 이 스 는 각각 다 르 므로 사선 리 서 지가 필 수 석 임 


2400!6, 600016 결제 처 리 하 기 


ㆍ 유니크 제약, 트랜잭션 등 80 ㅁ 0810/8 의 기 능 을 활 용 하 여 결제 관련 해 킹 방지 


(3231716@6 ㄴ 00 
ㆍ 초 기 에 구 현 하는 


로그 시 스 템 은 게 임 이 흥 행 하면 대부분 고 장 님 


ㆍ 14501 에 남 기 던 로그 대부분 첫 한 달 만 에 제거, 08 가 따 라 오지 못 힘 


다 ㅅ . 스 | 


ㆍ 구 키 런 일일 로그 60000, 두 덜 로그 소실 


ㆍ 심 플 하게 보 관 하 는 게 가상 효과적 


나중에 여 력 이 될 때 30000 등 을 구 성 하여 


ㆍ 쿠 키 런 의 경우 크리스탈 사 용 내 역 만 \/5(2Ｌ 에 보 관 하 고 있 


ㆍ 실시간 로그 분석: 티 3591056 하 [ 아 1, 1200513511, 10308 (대안: 56140) 


ㆍ 서비스 초 기 에 적 용 할 필 요 는 없으나 정말 유용한 시스템 


<> 그 2 2 2 <” 


ㆍ 어 뷰 저 차단, 6/5 응대, 간단한 데이터 분석 등에 활용 


ㆍ 일 깔 로그 분석: "30000, "19, 1146 


출시 이 후 부 터 의 시계열 분 석 이나 대용량 분 석 을 위해서 필수적 


일단 시 스 템 과 ㄷ 1Ｌ 구 축 이 완 료 되면 정말 다양한 분석 가능 
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ㆍ /1110860316 


[. 091616 이 뜨는 중 
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사 료 도 맡 


ㆍ 대 안 으 로 000@「 도 있다 


&4[05081!6: 어떻게 접 근 해 야 할까? 


ㆍ 4041050816 구 성 하 는 것과 자 동 으 로 서버 댓 수 를 늘 리 거나 줄 이 는 것은 별개 
ㆍ 조 기 에 는 4041050816 구 성 만 하고 자 동 으로 서버 댓 수 를 줄 이 지 는 말자 
ㆍ 서 버 가 하 루 살 이 가 되면 로그 관리 난이도 급상승 

ㆍ 서 버 가 써 지 기 전에 로 그 를 어 딘 가 로 백 업 해 아 함 


ㆍ 따라서 실시간 로그 전송 시 스 템 을 구 성 해야함 => 상당히 어려움 


초 기 에는 비 용 감소 보다는 게임 흥 행 을 대 비 한 보험 정도로 사 용 하 는 것 을 추 


저 (특히 28) 
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결론 


ㆍ ' 쿠 키 련 서 버 를 과 거 로 돌아가 다시 구 현 한다면 어떻게 할 까 ?" 에 대한 대답 


ㆍ 시 간 을 알 뜰 하게 투 자 하면서 투 자 대비 효용성 높은 목표 지향 
ㆍ 게 임 이 흥 행 했을 때 부 하 를 견디는 서 버 를 구 축 하는 건 어렵다 
ㆍ 저 렴 하고 성능 좋은 서 버 보다 성 공 하는 게 임 을 만드는 게 더 어렵다 
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ㆍ 나 머 지 는 모두 ㅠ 3060[ 임 을 명심 
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2014 
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